Cha của Lưu Tị là Lưu Trọng (Lưu Hỉ), con trai thứ hai của Lưu Thái Công, thái thượng hoàng nhà Hán và là anh của Hán Cao Tổ Lưu Bang[1]. Năm thứ bảy đời Hán Cao Tổ đã phong Lưu Trọng làm Đại vương, Lưu Tị cũng được phong làm Bái hầu. Tuy nhiên sau đó quân Hung Nô sang xâm lấn, Lưu Trọng không chống lại, phải chạy sang Lạc Dương. Hán Cao Tổ nể tình là cốt nhục nên không giết, chỉ phế làm Cáp Dương Hầu. Năm 193 TCN, Lưu Trọng mất khi Lưu Tị đã thụ phong ở đất Ngô nên được tôn thụy hiệu là Khoảnh vương.

Sử ký ghi lại rằng Lưu Tị là người dũng mãnh và có dã tâm lớn, có nét giống với Hán Cao Tổ.